【问题标题】:Spring integration stream SFTP: pattern filter not workingSpring集成流SFTP:模式过滤器不起作用
【发布时间】:2019-11-07 15:37:14
【问题描述】:

我有以下初始 spring 集成流程:

   final var inboundStreamingAdapter = Sftp.inboundStreamingAdapter(new SftpRemoteFileTemplate(sftpSessionFactory))
            .patternFilter("*.csv")
            .remoteDirectory(sftpRemoteDirectoryDownload);

   IntegrationFlows.from(inboundStreamingAdapter,
            c -> c.poller(Pollers.trigger(new PeriodicTrigger(10)).maxMessagesPerPoll(1)))
            .channel("data")
            .split(mySplitter)
            .get();

我的 sftp 服务器上有以下文件:

.DS_Store
PL_12002_1815_1.csv1

据我了解,适配器应该过滤掉不以 csv 后缀结尾的所有内容。

实际发生的情况是,某些文件 (.DS_Store) 有时会通过 mySplitter,具体取决于当前存储在 FTP 上的内容。

据我所知,问题出在 AbstractRemoteFileStreamingMessageSource(用作 SftpStreamingMessageSource 类的基类):

           if (this.filter != null && this.filter.supportsSingleFileFiltering()
                       && !this.filter.accept(file.getFileInfo())) {  //HERE APPLY A FILTER AND FIND OUT PL_12002_1815_1.csv1 SHOULD NOT BE PROCESSED

                   if (this.toBeReceived.size() > 0) { // don't re-fetch already filtered files 
                       //HERE WE LOAD ANOTHER FILE FROM THE QUEUE (.DS_Store)
                       file = poll();
                   }
                   else {
                       file = null;
                   }
           }
    //FILTER IS NOT REAPPLIED FURTHER DOWN AND WE CREATE A MESSAGE FOR .DS_Store
           if (file != null) {
               try {
                   String remotePath = remotePath(file);
                   Session<?> session = this.remoteFileTemplate.getSession();
                   try {
                       return getMessageBuilderFactory()
                               .withPayload(session.readRaw(remotePath))
                               .setHeader(IntegrationMessageHeaderAccessor.CLOSEABLE_RESOURCE, session)
                               .setHeader(FileHeaders.REMOTE_DIRECTORY, file.getRemoteDirectory())
                               .setHeader(FileHeaders.REMOTE_FILE, file.getFilename())
                               .setHeader(FileHeaders.REMOTE_HOST_PORT, session.getHostPort())
                               .setHeader(FileHeaders.REMOTE_FILE_INFO,
                                       this.fileInfoJson ? file.toJson() : file);
       }

我会说这是一个错误,但也许我只是配置错误,有人可以帮忙吗?

【问题讨论】:

    标签: spring spring-integration spring-integration-dsl spring-integration-sftp


    【解决方案1】:

    看起来像一个错误; if 应该是 while(带有空检查)。

    请打开an issue on GitHub

    【讨论】:

    猜你喜欢
    • 1970-01-01
    • 2016-11-10
    • 2023-04-03
    • 1970-01-01
    • 2018-09-20
    • 2012-05-24
    • 1970-01-01
    • 2015-02-11
    相关资源
    最近更新 更多